HDFS相关论文
智能化的运维系统借助大数据处理进行数据筛选、分类再结合人工智能算法，最终为整个播出监测系统提供安全可靠的运维信息、分析信息......
开源镜像站是一个放置开源系统镜像文件的站点，免费提供镜像文件和一些常用软件包下载。构建校园网内部的开源软件镜像站点，能更好地......
HDFS（Hadoop Distributed File System）默认随机选择副本存储位置，未充分考虑数据节点的差异性。文章提出了一种改进的数据存放策略，使......
为了有效提高非结构化数据处理的效率，本研究围绕MapReduce框架、Hadoop分布式文件系统（Hadoop Distributed File System,HDFS）、Hado......
HDFS是Hadoop中一个高容错性的框架,其核心功能是进行数据的分布式存储,它一般被部署在廉价的机器上,提供高吞吐量来访问程序的数......
伴随着互联网技术的迅猛发展,云计算作为当前重要的研究方向,国内外产生了丰富的云计算产品,如阿里云,华为云以及亚马逊的AWS等。......
浙江省历史存档的不同遥感平台、传感器、时相以及分辨率的海量影像数据，缺乏一种高效的存储管理方法。为了满足用户的高并发、多样......
随着我国经济和城镇化建设全面发展,建筑业蓬勃发展,高层建筑和超高层建筑的建设需求日益增多,这类建筑的外墙装修、维护、清洗等......
伴随着信息技术以及各种互联网企业的迅猛发展,面对爆炸的数据以及种类繁多的新业务,传统老旧的运维方式已经不能满足一个大型企业......
该文针对传统煤矿安全预警存在数据获取精准度差、数据融合能力低、无法完成数据深度挖掘的问题,设计了一种基于大数据的煤矿安全......
随着大数据时代的深入发展,信息过载现象让人们难以在互联网中找到符合自己兴趣的信息。推荐系统由此出现,不仅能帮助用户筛选出喜......
近年来,随着国内经济的快速发展和科研探索在幼教领域的进展,我国对教育行业的重视让幼教市场的规模逐渐扩大。而当前面向幼教领域......
随着科技发展和工业制造业企业的转型升级,许多传统企业在生产数据的采集上的弊端不断显现出来,许多生产数据都是通过人工抄表的方......
随着大数据、人工智能、云计算等技术的快速发展,电子商务、商业智能、大数据分析等技术的市场化应用,针对于海量数据存储有了较高......
本文介绍三种主流分布式存储系统的各自特点,分布式存储是目前流行的数据存储方式.本文详细介绍HDFS、Ceph、Swift三种系统的工作......
随着油气勘探开发智能化应用越来越成熟、应用场景越来越丰富,大规模应用日益临近,样本的分布式存储、高效采集及并行计算已成为油......
随着我国电网规模的逐渐扩大,电网中数据的结构变得越来越复杂。虽然给电网带来了显著的优势,但是也给电网带来了一些风险。电网中......
Github已经成为当下最受欢迎的开源代码托管平台,越来越多的开发人员和企业将项目上传到Github平台上。开发人员由于疏忽和安全意......
点评网站在 O2O 行业经过了十多年的耕耘后，已经积累了大量的评论数据、商户数据和用户数据等数据信息，而且每个月仍以百万级的数据......
With the explosive development of the Internet of things technology in recent years,the Internet of things technology is......
合成孔径雷达(Synthetic Aperture Radar,SAR)具有全天候、全天时的特点,可方便地获得同一地区不同时间段的图像.因此,SAR图像得到......
HDFS分布式文件系统作为Apache Hadoop的核心组件之一,在工业界得到了广泛应用.HDFS采用了多副本机制保证数据的可靠性,但是由于多......
物联网和云计算技术发展,促进了大数据时代到来,大数据技术经过十几年的发展逐步走向稳定、成熟。基于Hadoop框架模式下对3台主机,......
针对目前心脏病预测存在的准确率低、技术平台分散、耦合差等问题,本文采用spark大数据处理技术,结合HDFS分布式数据存储技术,设计......
在新冠肺炎疫情的影响下,大学生就业已经成为受到广泛关注的社会热点问题。在疫情的冲击下,大学生就业市场的供需两端受到一定影响......
校园云盘信息管理系统采用HDFS、HBase作为文件存储系统,高可用框架的MySgl数据库保存文件元数据,保证元数据安全,通过HDFS和MySQL......
为解决电子通信大数据存储问题,基于分布式文件系统设计一种崭新的海量数据存储方案。基于空闲容量策略优化传统HDFS系统的存储方......
随着信息技术的发展,存储系统占有举足轻重的地位。在数据爆炸性增长的今天,本地的存储很难满足不断增长的海量存储的需要,而且个......
随着互联网技术和多媒体技术的迅猛发展，网络技术和教育技术日益融合，由此构成了一种新兴的教育方式—远程教育。远程教育已成为现代......
HDFS的默认副本放置策略较为简单,若随机选择的节点负载过重,会影响HDFS的文件写入速度。为改善这一问题,提出了一种基于KNN的副本......
随着校园网中教学资源数据量不断增加,为教学资源存储、查询带来了难度。为了优化教学资源存储管理,提高资源利用率,使用基于Hadoo......
车联网系统能极大的改善城市的交通状况,但是它会产生大量的数据,如何存储海量的车联网数据成了一项艰巨的挑战,而云计算可以提供......
我国土地广袤、地质和地理环境复杂,地质灾害种类多、分布广、危害大。为了减少地质灾害的损失,保护人民生命财产的安全,需要收集......
近年来互联网技术的飞速发展造成了数据量的爆发式增长,海量数据的存储和计算对普通用户而言是巨大的负担。对需要从海量数据中提......
在当今社会,伴随着社交网络、物联网、互联网等技术的普及,全球数据信息正以指数级的速度爆炸性增长。而数据的存储量也由TB、PB到......
随着互联网技术在各个领域的不断渗透,互联网医疗逐渐成为人们生活中的一部分。医疗数据也从各个方面涌现出来,电子病历(Electroni......
HDFS(Hadoop Distributed File System)能够为海量数据提供分布式数据存储解决方案,但是HDFS设计之初是面向TB级别的大文件,当文件......
随着集成电路技术的发展,面向微米级微生物检测的便携式高精度显微成像设备已经成为相关领域的研究方向。在实际使用中此类设备可......
随着信息技术的快速发展,云计算、大数据等热门行业崛起,传统的单机作业不再能满足用户日益增长的需求。越来越多的个人以及企业都......
随着信息技术的不断向前发展,以及IT技术与传统行业互相碰撞与融合,促使当今的数据量出现爆发式增长,使得数据存储规模远远超过物......
随着科学技术的快速发展,云计算、社会网络、物联网等新兴技术为人们的工作以及日常生活带来了巨大的方便,与此同时数据的数量和类......
随着整个社会的信息化程度的不断提高,信息在现代人的日常生活中扮演着愈发重要的角色。连续序列模式挖掘算法可从目标序列中发现......
随着信息技术的不断发展,我们正处在一个数据量爆炸增长的时代,同时也是一个越来越依靠数据进行决策的时代。传统的存储技术在面对......
随着云计算、大数据领域的发展,对分布式系统的应用与要求越来越多,面对的应用环境也越来越复杂。Hadoop分布式系统是当前主流的分......
随着大数据时代的到来,互联网环境中的数字图像呈现爆炸式增长。近年来,攻击者将恶意代码或程序隐藏在图像中并进行大规模分发,数......
随着通信技术、网络技术和移动互联网技术的不断发展,人们生活水平日益提高,休闲娱乐的方式也发生了翻天覆地的变化,不仅通过电视......
